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Моделирование мимической составляющей 
для украинской жестовой речи 


Розглянуто підхід для моделювання емоційної та артикуляційної складових обличчя віртуальної моделі 
людини в процесі відтворення нею українського жестового мовлення. Запропонований підхід дозволяє 
використовувати отриманні при моделюванні параметри для аналізу зображень обличчя людини в 
процесі відтворення жестового мовлення. 
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В статье предложен подход для моделирования змоциональной и артикуляционной составляющей лица 
виртуальной модели человека в процессе воспроизведения украйнской жестовой речи. Предложенньтй 
подход позволяет использовать полученньве при моделировании параметрьт для анализа изображений 
лица человека в процессе воспроизведения жестовой речи. 

Ключевьге слова: виртуальная модель, жестовая речь, идентификация змоций и артикуляции. 


Вступ 


Для синтаксису жестового мовлення характерна наявність немануального мар- 
кера: у запитальних реченнях, при загальному запитанні - підведені брови, при окремому 
(приватному) запитанні - опущенні брови та нахилена вперед голова. При запере- 
ченні - негативні рухи головою, відповідний вираз обличчя. Для розповідних речень 
характерна наявність на обличчі емоційного забарвлення, що відповідає смислу інфор- 
мації, що передається. Крім того, у жестовому мовленні присутня (зазвичай) артику- 
ляційна складова - промовляння за допомогою рухів губ відтворюваного жестами 
контенту звукової мови. 
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Отже, синтез мімічної складової (для моделювання процесу відтворення жесто- 
вого мовлення за допомогою віртуальної моделі людини та за умови майбутнього 
аналізу (розпізнавання)) відіграє дуже важливу роль. 

Метою даної роботи є розширення запропонованих технологій для моделювання 
та аналізу мімічних проявів емоцій |1| та аналізу міміки губ при промовлянні |2| для 
синтезу та аналізу мімічної складової для українського жестового мовлення. На основі 
технологій (1, 2) потрібно побудувати загальну модель, яка буде використовуватись 
як для відтворення жестового мовлення віртуальною моделлю людини, так і для роз- 
пізнавання відповідних маркерів на обличчі звичайної людини. 


Міміка із засад концепції синтезу 
та аналізу жестового мовлення 


Суттєві обмеження існуючих засобів відтворення жестової мови, з одного боку, 
та розвиток сучасної обчислювальної техніки, з іншого боку, спонукають до розробки 
більш гнучких алгоритмів, за допомогою яких можна було б створювати нові комп'- 
ютерні системи навчання та комунікації для людей з вадами слуху. У роботах |3|, |4 
запропонована концепція інформаційної технології невербального спілкування людей 
з вадами слуху на базі використання мультимедійних можливостей сучасної комп'ю- 
терної техніки для відтворення жестової мови. 

Узагальнено концепція інформаційної технології зображена на рис. 1. 
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Синтез 
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Рисунок 1 - Узагальнена концепція інформаційної технології 


Основною ідеєю запропонованої концепції є синтез жестової мови через моде- 
лювання процесу її відтворення. З іншого боку, отримана при моделюванні жестової 
мови інформація використовується для розпізнавання (аналізу). Отримана таким чи- 
ном інформація є вхідною (як окремо, так і в поєднанні) для створення нових засобів 
комунікації, навчальних програм тощо. 

Синтезувати жестову мову пропонується за допомогою просторової моделі 
людини, яка дозволяє уникнути недоліків існуючих засобів відтворення жестової 
мови (фото- та відеозображення). 

Просторова модель повинна синтезувати основні канали невербального спілку- 
вання: міміку, жести та пантоміміку. Виходячи з природи жесту як довільного знака, 
що продукується головою, руками, тілом та виражає емоції і повідомляє інформацію, 
потрібно запропонувати технології як для отримання та збереження жестів (послі- 
довності зміни кутів скелета людини з плином часу), так і для формалізації мімічної 
складової (емоції тощо) (рис. 2). 
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Із запропонованої схеми (рис. 2), яка розкриває суть процесу синтезу жестової 
мови, з точки зору відображення на обличчі (як каналу невербальної інформації) 
випливають такі основні задачі (сигнали очей і брів можна звести до емоційної 
складової): 

1) потрібно розробити інформаційну та математичну моделі для синтезу та ана- 
лізу емоційних проявів на обличчі; 

2) потрібно розробити інформаційну та математичну моделі для синтезу та ана- 
лізу візуальних мімічних проявів при промовлянні усної мови (з урахуванням про- 
мовляння при виконанні жесту). 
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Рисунок 2 - Схема концепції просторової моделі 
для моделювання візуалізації жестової мови 


Виходячи з того, що емоційні та артикуляційні прояви на обличчі людини мають 
одну природу - скорочення певних м'язів - пропонується розглядати задачу синтезу 
мімічних проявів комплексно: як для емоційної, так і для артикуляційної складових. 


Формалізація складових, що впливають 
на формування мімічних проявів 


Аналіз систематизації емоцій 1 їх виразів на обличчі, особливо методика БКАСЗ |3| 
дає змогу виділити ряд зовнішніх мімічних проявів на обличчі, суперпозиція яких 
формує емоційні та артикуляційні стани. Методика КАС5 оперує набором рухових 
одиниць обличчя, за допомогою яких відтворюються основні рухи, що здійснюються 
основними м'язами чи групами м'язів. Авторами методики ЕАС5 також розроблені 
емоційна система кодування рухів обличчя ЕтЕАСЗ5 (61) 1 ЕАСЗАТО |71, які розгля- 
дають тільки рухи обличчя, пов'язані з емоціями. За допомогою цих методик виведені 
відповідні формули (послідовності рухів (з певною інтенсивністю), суперпозиція 
яких відтворює певні емоції). За допомогою цих формул визначені такі емоції: зди- 
вування, страх, радість, смуток, відраза, зневага (презирство), гнів. 
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Після аналізу одиниць рухів м'язів обличчя для методики ЕАС5 були запропо- 
новані ознаки, за допомогою яких можна синтезувати мімічні прояви емоцій, нема- 
нуальні маркери синтаксису жестового мовлення та артикуляційні складові звукової 
мови. Основні з цих ознак (для брів та лоба) наведено у табл. І. 

Ці мімічні ознаки, подані у вигляді віднормованих значень, створюють систему 
координат для кодування довільної експресії чи артикуляції на обличчі. Початкова 
точка цієї системи координат відповідає стану спокою обличчя. 

Таблиця 1 - Ознаки для синтезу мімічних проявів емоцій (для брів та лоба) 


Інтенсивність 

Мо Ознака : 

Початкове значення Кінцеве значення 
1. | Брови (вертикаль) Стан спокою Підведені догори 
2. | Брови (горизонталь) Стан спокою Зміщені до перенісся 
3. | Куточки брів (зовнішні) Стан спокою Підведені догори 
4. | Куточки брів (внутрішні) | Стан спокою Підведені догори 
5. | Лоб (вертикаль) Стан спокою Зморшки 
6. | Лоб (горизонталь) Стан спокою Зморшки 


Для формалізації емоцій пропонується перейти до вивчення ситуацій, в яких ці 
емоції виникають ||. Тобто при визначенні емоцій в найбільш загальному вигляді 
описується ситуація, в якій вони виникають. Розрізнятимемо назву емоції і її позна- 
чення. Під позначенням будемо мати на увазі вектор (Етап) (тобто абстрактне поняття) 
з такими ознаками: 


вну 6 бе і8, (1) 


де 2 - бінарні ознаки, які класифікують емоції: 5| - ознака, яка визначає знак 
емоції - позитивна (1) емоція чи негативна (0); 2» - ознака, яка визначає час виникнення 
емоції відносно події (передбачаюча (0) та констатуюча (1) емоції); 53 - ознака, яка 
визначає направленість емоції. За цією ознакою виділяють емоції, направлені на себе (1) 
та направлені на зовнішні об'єкти, на інших людей (0). 

Комбінуючи три описані бінарні ознаки, отримаємо 8 різних варіантів. Введемо 
4-у ознаку (п). Ця ознака описує групи емоцій за джерелом їх походження: 

те 1 -емоції, пов'язані з задоволенням (незадоволенням) особистих потреб людини; 

то2 - емоції, які виникають в результаті порівняння деякого об'єкта, самого 
себе або своїх дій зі своїми же нормами, стандартами, правилами, переконаннями; 

те3 - емоції, які виникають в результаті порівняння об'єкта з суспільними пра- 
вилами та нормами; 

тре - емоції, які виникають у зв'язку з потребами інших людей; 

то У - емоції, які виникають у результаті взаємин з іншою людиною; 

тоб - емоції, які виникають на основі презирства. 

Сполученням наведених ознак можна описати 45 якісно різних емоцій. 

Метою подальшої формалізації є вибір назв емоцій, які найбільш точно задоволь- 
няють набору класифікуючих ознак. Після призначення кожній емоції чотирьох кла- 
сифікуючих ознак цей набір стає її визначенням. Після формалізації емоцій у такий 
спосіб вони стають абстрактними об'єктами і з ними можна оперувати відповідно до 
їх означень, а не з особистим феноменологічним досвідом. 

Далі, використовуючи запропоновані ознаки, означимо емоції для першої групи 
(емоції, які виникають на основі особистих потреб, п-1) (11. Горе ( Ету « (0,1,1)): під 
горем розумітимемо емоцію, яка виникає при втраті деяких цінностей. Радість 
( Еті і (111): емоція, яка виникає в результаті задоволення деякої особистої потреби 
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у широкому сенсі. Типовою ситуацією яка приводить до радості буде ситуація досяг- 
нення бажаної мети. Страх (ті « (0,0,1)): виникає в результаті передчуття втрати 
можливості задоволення деякої особистої потреби. Надія (тп! - (1,0,1)): виникає в 


результаті передчуття задоволення особистої потреби. Гнів ( Ет! --(0,1,0)): виникає в 
результаті незадоволення деякої особистої потреби, яка стимулює людину на подо- 
лання перешкоди, яка заважає її задоволенню. Задоволення ( Ємті - (1,0)): виникає в 
результаті досягнення деякої мети, пов'язаної з особистою потребою, направлене на 
припинення дій з досягнення цієї мети. Інтерес ( Єт) - (1,0,0))): емоція, яка виникає до 
об'єкта, з допомогою якого людина передбачає задовольнити свою потребу. Зневага 
( Епиу, « (0,0,0)): виникає в передчутті того, що об'єкт не задовольнить деяку нашу 


потребу. Якщо людина повела себе неправильно, то ми робимо висновок про її нез- 
датність дати нам те, що потрібно, і можемо відчути до неї зневагу. 


ца . . хай і з реоречио . 

Розглянутий набір векторів-емоцій ( Ет;, і - 0,7 ) будемо називати базовим, і 

будь-яку іншу емоцію будемо подавати у вигляді опуклої комбінації базових емоцій. 
й У То з фра 

Використовуючи означені вектори емоцій ( Ет;, і - 0,7 ), побудуємо векторну модель 


емоцій за наступною схемою: 

1) означимо емоції через різноманітні сполуки 4 ознак ситуацій, в яких вони 
виникають; 

2) кожній емоції поставимо у відповідність деякий елемент векторного простору; 

3) з допомогою визначень через ознаки ситуацій між векторами вводиться опе- 
рація додавання; 

4) множення на позитивне число моделює існування відносно більш сильних та 
більш слабких однакових емоцій; 

5) множення на негативне число відображає факт існування протилежних емоцій. 

В П1| доведено, що емоції можна представити у вигляді опуклої комбінації двох 


емоцій із вже розглянутих ( Еті, і - 0,7 ). Виходячи з цього маємо: 
Ет' «авт! -ВЕт!,а В -1,В з а,п - 2,6, і 2 0,7, ке |0--7|/єП--6р) | (2) 
де Ет? - і-а емоція для п-ї групи, Еті - емоція із 1-ї групи для формування 


зсуву при генерації емоцій для /-ї групи, Ет - емоція 1-ї групи, яка знаходиться на 
тій же вершині, що й емоція, яка генерується (тобто емоція, яка генерується, повинна 
мати такі ж 01, 22 1 63, що й емоція з 1-ї групи, і вона повинна мати більшу вагу, ніж 
Епу (тому В »а)). 

Далі наведемо емоції, пов'язані з особистими нормами та правилами (т-2). 
Емоцією зсуву 1-ї групи є емоція задоволення ( Ет.). 

Провина (Хті «авт - ВЕт!, В »о ) є Задоволення (своїми принципами) - 
Горе (від необхідності нести відповідальність за порушення принципів. Повага 
( Ете з-авт; з ВЕте, В з» с ) є Задоволення - Задоволення (від того, що інша людина 
відповідає цим принципам). Самоповага (Елі -аЕт, - ВЕт!, В за ) є Задоволен 
ня З Радість (від відповідності самого себе цим принципам). Презирство 
( Еті - авт; тА ВЕт), В з с ) єЗадоволення -- Гнів (направлений на подолання ситуації 
невідповідності цим принципам). Симпатія ( ту зате -- ВЕті, В з а ) є Задоволення -- 
Інтерес (до людини, яка, можливо, буде задовольняти потреби індивіда). Антипа 
тія (Ету з ат); - ВЕт), В »о ) є Задоволення "8 Зневага (до людини, яка, мож 
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ливо, не буде задовольняти потреби індивіда). Почуття відповідальності 
( Еті забт; з ВЕпи, В з» о.) є Задоволення - Надія (на те, що індивід сам буде відпо- 
відати своїм нормам). Безвідповідальність ( Еті з авт; з ВЕті, В з» а. ) єЗадоволення -- 
Страх (можливої невідповідності своїм нормам). 

Аналогічним чином можна означити й емоції для інших й. Для емоцій, які вини- 
кають в результаті відповідності (невідповідності) чиїмось або суспільним стандартам, 


нормам, правилам (/-3), емоцією зсуву 1-ї групи є емоція поваги ( т ). Емоції, які 
виникають у зв'язку з чужими потребами (/--4), мають емоцією зсуву 1-ї групи захоп- 


лення ( Ето ). Емоціям, які виникають на основі взаємних відносин з іншими людьми 
(пе5), зсувом 1-ї групи слугує емоція подяки ( Кт ). Емоції на основі презирства 
(п'6) використовують, відповідно, для зсуву 1-ї групи емоцію презирства ( Ет) ). 

Для переходу від моделі емоцій, що містить психологічні ознаки, до моделі з 
мімічними ознаками застосуємо підхід, запропонований для методики БАСЗ5 |3-71. 
Скористаємося запропонованим набором ознак для синтезу мімічних проявів емоцій 
(табл. 1). За допомогою цих ознак побудуємо векторний простір. 

Екман (5| встановив, що існують сім основних виразів обличчя - конфігурацій 
(схем) міміки, які відтворюють сім емоцій: щастя, подив, страх, страждання, гнів, 
відраза (презирство) й інтерес. Екман виділив три автономні зони обличчя: область 
чола Й брів, область очей (очі, повіки, основа носа) 1 нижня частина обличчя (ніс, 
щоки, рот, щелепи, підборіддя). Проведені дослідження дозволили розробити своєрідні 
«формули» мімічних виразів, які фіксують характерні зміни в кожній із трьох зон 
обличчя, а також сконструювати фотоеталони мімічних проявів ряду емоцій. 

Щоб змоделювати емоційні вирази обличчя, потрібно спочатку визначити більш 
детальні їх залежності від рухів м'язів обличчя. У |5-7| наведена система для опису 
всіх візуально помітних рухів обличчя. 

Використовуючи аналогічний підхід побудовані базиси векторного простору (з 
використанням набору ознак для синтезу мімічних проявів емоцій (табл. 1)). Для цілей 
синтезу та аналізу мімічних складових жестового мовлення запропоновані три базиси: 

1) для основних емоційних станів (щастя, подив, страх, страждання, гнів, відраза й 
інтерес); 

2) для немануальних маркерів синтаксису жестового мовлення (підняті брови, 
опущені брови тощо); 

3) для артикуляційних мімік (15 візуальних портретів букв-візем та стан обличчя 
у спокої). 

За допомогою запропонованих ознак можливо побудувати відповідні вирази 
обличчя (як лінійну комбінацію) для віртуальних моделей та, з використанням базисів, 
отримати розклад довільної міміки обличчя людини на відповідні значення ознак та 
на вклад кожного вектора із означених базисів. 


Морфінг емоційних та артикуляційних складових 
для моделювання мімічних проявів на обличчі 


У жестовому мовленні, окрім самого жесту, каналами передачі інформації є 
емоційна, немануальна синтаксична та артикуляційна складові. Для правильної інтер- 
претації відтворення жестового мовлення необхідно враховувати весь комплекс інфор- 
мації, що супроводжує жест, бо один і той самий жест має багато значень в усному 
мовленні. 
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Для моделювання процесу анімації артикуляційної й емоційної складових вико- 
ристано механізм морфінгу - алгоритм плавного переходу від одного стану об'єкта 
до іншого. При застосуванні морфінгу використовуються тільки опорні стани, за 
допомогою яких розраховуються проміжні стани й моделюється процес анімації. 

Відображення або побудова міміки на обличчі тривимірної моделі досягається 
при застосуванні відносного (сегментного) морфінгу до моделі. Нехай розглядаються 


. . 3 Мотрі 3 . 
івнопотужні множини точок Х, с К/ та Х."" с К7, між точками яких існує строга 
0 і 


відповідність. Х, буде базовим мешем моделі або задаватиме базовий стан моделі, а 


Х ай 


- морфом: модель зі зміненим базовим станом. Формула відносного морфінгу 
для М морфів у формалізмі моделі буде мати такий вигляд: 


М М 
Х «(тоХо нти Хо) У ми, (3) 
та тоб 


де у, - Вагові коефіцієнти. Якщо під моделлю розглядати модель голови людини, 
а під хоть розуміти зміни в базовому стані моделі при мімічних проявах, то резуль- 
татом операції є лінійна комбінація мешів моделі й міміки. 

Для кожної точки х' є Х і відповідних цій точці х/ є Х /?"" при неврахуванні 
нерухомих точок формула (3) модифікується наступним чином: 


0, 


; - М 5 М хх є д 
Х отр У Ми Ви Хо У ми'Яи, ви З 


таїі тей І, 


(9 


Кк Кк й 
Ж -ху|2д 


дед - поріг чутливості до зміни положення точки в просторі. 
й ра«хоб | і 
Нехай 2(афб.х) Й , а»Рр. Тоді при використанні параметричного 
0, інакше 
рівняння прямої х 2 х(1-1)4-х.ї для моделювання процесу переходу з початкового 
стану у кінцевий загальне рівняння переходу зі стану Х, до стану Х, через проміжні 
стани Х,, Х.,..Х 


положення Х;, матиме вигляд: 


в моменти часу 1,1. ї, , В ЯКИХ МОДель має приймати відповідні 


п-1 


і-ї 


ізі сло а 7 


б 1-(1- 1, а-іЇ 
доби зо кон п ЛЬ Са В ль 2 (5) 


де г є|4Ї, |. 


Метод сегментного морфінгу дає можливість формувати кілька виразів обличчя 
на основі невеликої кількості морфів 1 змінювати стан обличчя при анімації мовлення. 
Додатковою перевагою цього морфінгу є те, що можна анімувати щелепу незалежно 
від губ та очей (моргання), незалежно від емоційного прояву на обличчі. 

Для моделювання мімічних складових процесу анімації жестового мовлення 
важливо враховувати такі складові: артикуляційна візема, емоція, немануальний 
маркер синтаксису жестового мовлення. 

Артикуляційна візема - це характерний вираз обличчя, що є візуальним порт- 
ретом фонеми або іншої базової звукової одиниці в розмовній мові. Використовуючи 
віземи, люди з порушеннями слуху сприймають розмовну мову візуально. Морфінг- 
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ціль віземи вважається одиницею візуальної інформації. Тому для розв'язання задачі 
синтезу правильної артикуляції при спілкуванні людей з дефектами слуху було про- 
ведено дослідження, спрямовані на отримання морфінг-цілей візем української мови |21. 

В українській мові розрізняють 15 візем і стан спокою: 0) базовий стан моделі 
голови людини; 1)а; 2)е; 3)0; 4) У; 5)1, и; 6) й; 7) ш, ж, ч, дж; 8)к,г,х, г; 9) п, б, м; 
10) в, ф; 11) т, д,н, л; 12)с, з, ц, дз; 13) р; 14) л", р"; 15) т", д', н". 

За тестовою вибіркою фонем української мови було отримано відеоряд процесу 
артикуляції професійного сурдоперекладача, на основі якого з урахуванням будови 
моделі голови людини були змодельовані морфінг-цілі артикуляційних візем україн- 
СЬКОЇ МОВИ. 

Для синтезу станів облич моделі з певними емоціями і немануальними марке- 
рами створені морфінг-цілі, що відповідають наведеним вище ознакам. Відповідні 
лінійні комбінації цих морфінг-цілей відповідають конкретним емоціям. 

Морфінг із використанням морфінг-цілей для фіксованого кадру здійснюється 
з урахуванням вагових коефіцієнтів: 

1) визначається кількість кадрів для анімації; 

2) визначається набір емоцій, присутніх у слові (або немануальний маркер); 

3) за фонетичною транскрипцією розраховується набір візем для візуалізації 
процесу артикуляції; 

4) для візем розраховуються тривалості етапів анімації й точки появи віземи. 

На основі отриманої інформації для кожного кадру будується набір артикуля- 
ційних візем й емоцій з їхніми ваговими коефіцієнтами. Формули розрахунку вагових 
коефіцієнтів подані графіками (рис. 3). 


о Кі 2 Н 4 5 5 7 8 з «БЕ 
для однієї віземи (емоції) 


0 5 10 15 7 5 5 


для комбінації візем для процесу моргання 


Рисунок 3 - Алгоритм розрахунку вагових коефіцієнтів 


Для відтворення процесу анімації артикуляційної й емоційної міміки тривимір- 
ною моделлю людини створено базовий клас, що реалізує морфемну анімацію. У класі 
реалізовані відповідні методи, які, використовуючи тривимірне АРІ ОРЕХЕОІ, від- 
творюють за описаними параметрами модель людини й з використанням алгоритмів 
спінінгу (для жестової кінематики) й морфінгу (для міміки) реалізують анімацію. 
У кожному кадрі може бути присутня емоція, артикуляційна візема або комбінація 
віземи і емоції. 
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Підходи до аналізу мімічних проявів 
на обличчі людини при жестовому мовленні 


Для аналізу (розпізнавання) мімічних проявів на обличчі людини (за умови 
використання ознак запропонованого векторного простору для моделювання) потрібно 
виявити на зображенні значення ознак мімічних проявів (табл. 1). Для цього можливо 
застосувати різні підходи. Використовувались такі підходи (рис. 4): шаблони з МОВВ5- 
кривих (1-4), 50ВЕ-точки-особливості зображення |9Ї, гнучкі шаблони для обличчя |3|. 


Шаблони з МОКВ5- ЗОВЕ-точки-особливості Гнучкий шаблон 
кривих 


Рисунок 4 - Застосування різних підходів для побудови 
вектора ознак мімічного стану обличчя 


За допомогою зазначених підходів будувався базис В векторного простору, що 
складався з векторів, які відповідали базовим емоціям (радість, горе, надія, страх, 
задоволення, гнів, інтерес, зневага). Далі визначався вектор ф , що відповідав конкрет- 
ній емоції. Значення елементів вектора х 


ха (в"в) .В'Ь (б) 


вказували на конкретний вклад кожної з базових емоцій у довільній емоції ФР, при 
цьому умова де (В"В)» 0 завжди досягалась. 

Для аналізу артикуляційної мімічної складової застосовувався аналогічний підхід. 
Будувався базис з 16 артикуляційних складових (15 артикуляційних візем і стану 
спокою). Отриманий базис був недостатньо лінійно-незалежним -- не виконувалась 
умова де ( В" В) » є » 0. Це випливає з того, що артикуляційні складові досить подібні. 


У такому випадку найбільш надійним методом для розв'язання задачі є метод сингу- 
лярного розкладу (5УРД). Було введено поріг 7 близькості до нуля сингулярних чисел, 
який відображає помилки в початкових даних та обчисленнях. Тоді наближений роз- 
в'язок задачі (7) шукається наступним чином: 


Ми ро і Т 
хефреуж і Ь, (9) 
1 Р а | 
2--,ДдЛяЯб,; рами ІС, -0 для с,«7; У,С" - матриці 
і 
з ортонормованими стовпцями. Результатом є вектор розкладу х, на основі якого 


приймається рішення про відповідність вхідного вектора конкретним базовим 
мімікам при промовлянні українською мовою. 


де У, - аїіав(бі,6),г50,,), б; 
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Висновки 


У даній роботі запропонований комплексний підхід для моделювання та розпі- 
знавання мімічної складової для українського жестового мовлення. Синтез мімічної 
складової дозволяє досить реалістично відтворювати емоційну, артикуляційну та не- 
мануальну експресії на обличчі віртуальної моделі при відтворенні нею українського 
жестового мовлення. Отримана при моделюванні інформація (ознаки мімічних станів) 
використовується для розпізнавання відповідних мімічних складових на обличчі реаль- 
ної людини при відтворенні нею українського жестового мовлення. Подальші дослі- 
дження будуть направлені на удосконалення методів запропонованого підходу. 
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КЕЗСМЕ 
Уи.С. Ктууопо5з, Пи. У. Ктак, О.У. Вагтак, А.5. Тегпоу 


Моаєїто ої Мітіс Сотропепіз ог пе (Кгаїпіап 5ї2п Гапоиа?е 

Моденпе ої а тітіс сотропепі їог Фе ЮКгаїпіап 5ієп Іапепаєє 15 Фебсгібед їп (Біз 
рарег. Мітіс сотропепі ріаує ап ітрогіапі ог емеп сгисіа! гоіе іп 5ієп Іапецаєе ої 
ітраїгеай Пеагіпє реоріе. Ії 5поцід Бе поїеа Шаї поп-птапиа! тагКег 15 а срагас(егізйіїс рагі 
ої 5ієп Іапбцаєє 5упіах. І іпіеггосайує зепіепсе5 іп яепега! дцевйоп, іс 15 гаївед 
еуергом/8; іп рагіїсиїаг дшезйоп, 16 15 Іоууегед еуебгомяє апа реад Пед Гогуага. Пі 
пебайоп, Ше пебайуєе пиуетепія ої а Пеад ап сопезропаїпе Гасіа! ехрге8510п (аКе 
ріасе. Етобйопя 5пом/п оп а рипап Гасе Шаг соггезропаз (о Ше іпіогтабйоп 15 а цкиа! рагі 
ої десіагайуе 5епіепсез. и аддїйоп, Шеге 15 ц5цаПу ап агіїсиіайоп сопропепі Їог 
ргопипсіайоп їі а реїр ої Пр5 піоуетепі ої а убісе сопіепі ої а бе5ішге м/рісП 15 
тергодисеа. 

Тре ашірог5 ргорозе а сопсері ої іпіогттайоп (есппоїоєу Їог поп-уеграї! 
согатипісайоп ої реоріє уп ітраїгед Пеагіпо. ТПе Базіс їдеа ої Ше ргоровей 
сопсерпоп 15 зуп(Пебзі5 ої зієп Іапецаєе ШгоцеПп Ше птоадейпе, ої 1ї5 гергодисйоп ргосе55. 
Оп Фе офФег рапа, Фе обіаїпедй іпіогтацоп дигіпе, поденпе ої 5ієп Іапецаєє 15 цзей Їог 
тесоєпійоп (апаЇу5і5). Ппаїогттайоп обіаїей їп 5исП мау 15 іприє (Бо зерагакеЇу апа іп 
согабіпацоп) Їог сгеайоп ої пем/ теапя ої соплтпипісайоп, (гаїпіпє ргодгатя. 

Ап арргоасі іо паітіс5 апа агіісціайоп птоденпе оп а уїгіша! плодє! ої а ритап Гасе 
їп Фе ргосез5 ої гергодисйоп ої Ше ЮКгаїпіап 519п Іапецаєє 15 ргороз5ед їп Фіз рарег. Тре 
ргоро5ед арргоасп аПом/5 иц5іпє рагате(егя, муУрБісі ууеге обіаїпед дигіпя, плодейтя, Їог 
апаГузі8є ої ітаєе5 ої а ритап Гасе дигіпе 58ієп Іапемаєє гергодисйоп. 


Стаття поступила в редакцію 02.07.2012. 
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